Ông là một thành viên họ Bùi làng Thịnh Liệt, đây là một gia tộc nổi tiếng với rất nhiều nhân vật có công với đất nước: Quan Quốc Tử Giám bạ (1464-1552), Bùi Trụ (khoảng từ đầu đến giữa thế kỷ 16), Bùi Vịnh (1498-1545), Bùi Bỉnh Uyên (1520-1613), Bùi Bỉnh Quân (1580-1630), Bùi Bỉnh Trục (1730-1815), Bùi Huy Bích (1744-1818), Bùi Phổ (1776-1836), Bùi Bành (1866-1935), Bùi Liêm (1881-1916) (1). Các nhân vật này đều có công đóng góp cho văn học, chính trị và việc cai quản đất nước.